package com.ayit.car.car_data;

import org.springframework.boot.test.context.SpringBootTest;

@SpringBootTest
public class main {
    public static void main(String[] args) {
        System.out.println("Hello World!");

        new WebCrawler().crawl("https://www.autohome.com.cn/suv/#pvareaid=3311265");
//        new WebCrawler().crawl("https://www.autohome.com.cn/5761/#levelsource=000000000_0&pvareaid=101594");
//        crawl("https://www.baidu.com");

    }

//
//    public static void crawl(String seedUrl) {
//        // 初始化URL管理器
//        URLManager urlManager = new URLManager();
//        urlManager.addUrl(seedUrl);
//
//        // 循环抓取URL队列中的URL
//        while(!urlManager.isEmpty()) {
//            String url = urlManager.getNextUrl();
//
//            // 下载网页
//            String html = WebDownloader.downloadHtml(url);
//
//            // 解析网页
//            WebParser.parseHtml(html);
//
//            // 获取解析到的URL，并加入URL队列
//            urlManager.addUrls(WebParser.getUrls());
//
//            // 存储解析得到的数据
//            DataStorage.saveData(WebParser.getData());
//        }
//    }


}
